—— 青亭网
苹果AR风挡专利细节曝光:集成Siri、智能UI显示
Esther| 撰文
前不久,青亭网曾报道过苹果被曝光的几份专利,专利内容显示苹果似乎将开发一种具有AR功能的汽车挡风玻璃/平视显示技术,这种技术甚至可能还支持汽车之间的FaceTime通话。
近日,美国专利和商标局又曝光了苹果的一份专利,其中透露了关于这款可集成在有人/无人驾驶汽车、飞行器、航天器、潜水载具的挡风玻璃、机器人中的AR技术的更多细节。此外,苹果似乎还希望将AR挡风玻璃技术用于协助真实与模拟的驾驶训练。
据青亭网了解,苹果在专利文件中表示,其初衷是为了帮助使用自动化机器的用户了解其决策过程和理由,增加人们对自动化机器的信任。通常自动化机器并不太需要人为操作,人也无法预测机器接下来的行为,不了解机器做决定的理由,这样对人类信任机器来讲并不能起到积极作用。
许多科研人都在努力研发能够自我解释的AI,比如MIT的科研人员的一款名为Transparency by Design Network(TbD-net)的神经网络,为了让人了解AI的决策过程,这种网络将问题分成多个子任务,然后再通过多个模块对问题进行推理。
简单讲,就是界面控制器将生成一个允许用户和载具交互的UI,用户可以通过界面了解载具的状态、行为和决策,也可以影响和控制载具。打个比方,用户可以在载具行驶过程中通过交互UI随时修改行驶路线,交互UI中可操控的信息包括时间轴、通讯方式和提示信息,这些简单、快捷的工具可帮助用户更好地操控和理解机器。
专利中提到的技术是一种全新的人机交互方式,它还可以应用在PC、工作站、终端机、移动设备(智能手机、平板电脑)、多媒体引擎等计算设备上。
用于驾校的新型教学工具
据悉,专利中的挡风玻璃界面(#104)可显示VR内容,届时玻璃会变成不透明的,虽然用户看不到玻璃外面的环境,但是可以在VR驾车教程中模拟训练。另外,这款挡风玻璃也可以变成AR屏幕,在学员实际驾驶的时候提供辅助信息。在驾驶过程中,可交互仪表盘界面将提供驾驶反馈信息,包括驾车指示、提高车技的建议、打分等等。
104:交互窗式界面,100:交互UI,324:VR界面,102:交互仪表盘界面,326:行驶反馈
修改路线时间轴
专利文件中显示,用户可以通过改变时间轴,提示自动载具其想要到达终点之前在路上买杯咖啡的意愿。另一种修改时间轴的方式,可以是Siri根据用户的喜好或者使用历史自动提示可在路上停经咖啡店路径点。或者,用户可以直接告诉Siri“给我找咖啡店”,Siri便会根据路线寻找附近的咖啡店。
100:交互UI,104:交互窗户界面,300:时间轴,302:出发点,306:路径点,304:当前地点,308:目的地,310:消息框
修改路线的选项可以是以消息框的形式出现,用户可以通过拖拽选项至时间轴,或者直接点击选项查看更多信息。专利文件中还描述了其他的替换方式,比如将选项通过AR交互窗式界面投射在用户眼前,用户可通过手势确认选项。
更多细节
上面提到过,之前美国专利与商标局曾曝出的苹果专利阐释了一款应用于自动驾驶汽车的导航系统,由类似于大型Face ID的3D扫描汽车前照灯系统和平视显示器组成,涉及到了全新的内/外部传感器、控制元件、车内界面和利用挡风玻璃进行FaceTime通话等技术。
而在苹果这份新的专利中指出,司机/乘客可在挡风玻璃的交互窗式界面中看到自动驾驶汽车的外部环境,可以是透过挡风玻璃、窗户、舷窗等高透明度表面,也可以是通过传感器和计算机在挡风玻璃上重现外部环境,如果是后者,用户便可以操控屏幕中的内容,与之进行交互。
专利文件中写道,交互窗式界面也许将使用AR技术和计算机视觉,不仅为用户提供多种与“外部环境”交互的方式,或许还可以在屏幕上投射可使用的功能或者信息。
另外,交互UI可能还会为用户提供交互信息,包括导航信息、载具移动信息、载具感知信息、载具状态信息、环境信息诸如此类。
UI交互
导航信息:可能包括载具从起点到一个或多个目的地的路线信息,比如导航系统可能包括但不限于地图测绘信息、地点信息、环境条件信息(如交通信息、路障、天气、封路诸如此类)。
假想图
载具移动信息:包括自动驾驶汽车的移动信息,比如地点、惯性导航信息和动力信息。
载具感知信息:包括自动驾驶汽车对外界环境的感知信息(通过分析传感器捕捉的外部环境数据生成)。
载具状态信息:包括载具每个子系统的状态,比如引擎元件的运行状况、汽油量、电池电量、轮胎压力、车窗状态(比如打开或者关上)等内/外部元件状态。
载具环境信息:包括汽车内部环境,比如车内温控、音乐和声音控制、座椅方位等用户体验信息。
考虑到苹果为AR挡风玻璃技术提交了不止一个专利文件,也许苹果会在“泰坦”自动驾驶汽车使用这款极具创新的未来感技术。此外,模拟驾驶训练和手势识别对于汽车来说真是很实用的功能了,期待苹果将专利中的技术研发出来。
(END)
推荐阅读
—— 青亭网